esp@cenet document view 



Page 1 of 1 



Identifying and classifying surface qualities and defects of object - using 
video camera to store reflected images arising from sequential exposure to 
light from distributed sources 



Patent number: 
Publication date: 
Inventor: 
Applicant: 

Classification: 

- international: 

- european: 
Application number 
Priority number(s): 



DE4123916 
1992-01-23 

MALZ REIN HARD (DE) 
MALZ REINHARD (DE) 

G01B11/30; G01J1/08; G01M11/00; G01N21/84; 
G01N21/88; G02B19/00; G06K9/20 

G01N21/88K 

DE19914123916 19910719 

DE19914123916 19910719; DE19914101266 199101 17; 
DE1 9904023026 19900719 



Abstract of DE4123916 

The surface to be detected is illuminated from 
several sources (2,3) in different places. The 
sources illuminate the surface in sequence. 
The diffusely returned or reflected light at each 
point in the time sequence is recorded as 
space-time images by means of a video 
camera (7) with an image memory (9). 
The object is surrounded by an illuminating 
canopy whose surface light source 
arrangement is freely programmable w.r.t. 
angle and intensity stages. A further 
programmable light source (3) with a 
collimating optic (5) enables all points of a flat 
object surface to fulfil the reflection angle 
condition for the pupil of the camera lens. 
USE/ADVANTAGE - Characteristics and 
defects of surface such as edges, textures, 
nicks, colour spots, mat section, waves, cracks 
of objects such as metal pieces, ceramic discs, 
metal sheets, semiconductor chips, hybrid 
components, SMD's and their circuits, seals. 
Rapid detection and classification. 
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Prufungsantrag gem. i 44 PatG «t gestetlt 

® Verfahrenzum beleuchtungsdynamischen Erkennen und Klassif izieren von OberflSchenmerkmalen und 
-defekten elnes Objektes und Vomchtung hierzu 

<§) Die Erfindung betrifft ein Verfahren und eine Vorrichtung 
turn belBuchtungadynamiachan Erkannen und Klassifizieren 
von Oberflaehenmerkmalen und -defekten ernes Objektes 
(I), wobei die zu detektierende Oberfttche mrttels menrerer 
Beleuchtungsquellen (2. 3) beleuchtet wfrd, die etna unter- 
schiedlicne Positionierung im Raum haben und die Beleuch- 
tungsquellen sequential! das Objakt beJeuchten und das von 
der Oberfiache in jedem Zeitpunkt jeweils drffus zurQckge- 
worfene oder raflektierte Ucht mittels einer VWeokamera 
(7 f , die eina Bildspeichereinrichtung (9) aufweta, ab rsum- 
zeitlich verscniedene Bilder aufganomman warden. Das 
Objakt (1) 1st von einem Beleuchtungehimmat umgeben, 
deaaen flachige Uchtquellenanordnung (2) sich mit vorgab- 
m barer Wirtkel- und tntensititsabstufung frei programmtoren 
Hi&t. mittels dereelben erne variable Anzahl betieblger Ucht- 
( funktionan erzeugt wird, die das Objakt naoheinandar be- 
leuchten, wobei das Objekt zuaattlich aua einem begranzten 
> Raumwinkelbereich mrt etner weiteren program mierbaren 
Uchtquelle (3) uber eine Koltimationsoptik so beleuchtet 
wird, daft fur alia Puntte einer ebenen Objektoberflacha die 
ReflexionawinkeJbedlngung erfulrt wird und eine geeignet 
gewahlte Punktquella uber die aJs ebener Spiegel gedachte 
Oberflfiche in die Kamerapupina ebgebtldet wird. Die entste- 
henden Bilder warden von der VIdeokamera (7) aufgenonv 
men und in einer Bildspetehereinrichtung (9) abgespeiehert; 
die Qrauweitfolgen des aufgenommenen BildstapeH konnett 
einer ... 
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BeschreibuDg 



Technisches Gebiet 



Die Erfindung betrifft ein Verfahren zum bcleuchtungsdynamischen Erkennen und Klassifizieren von Oberfla- 
chenmerkroalen und -defekten eines Objektes gemafl dem Oberbcgriff des Anspruchs 1 und Vorrichtung hierzu. 



Stand derTechnik 



In dem Aufaatz von R. Mate: Der Einsatz schneller Beleuchtungsopcrationen fflr die robuste Merkmafcextrak- 
tton und Segmentierung in der industriellen Objekterkennung und QualUltsprOfung. Infoiroatik-Fachberichte 
"Mustererkennung 1988", DAGM-Symposion 1 988, Springer-Verlag, Seite 270 bis 276, wurde eine Beleuchtungs- 
anordnung vorgeschlagen, die aus vier Beteuchtungsmodulen besteht: 

emem Auflichtmodul zur schattfreien Ausleuchtung diffus streuender Objekte, realisiert mit einer Punkdicht- 
quelle, die fiber einen Teilerspiegel in den Beobachtungsstrahlengang der CCD-Matrixkamera eingespielt 1st, 
emem Streiflichtmodul zur Aufhellung von Kanten und diffus streuenden Oberflachenfehlem, realisiert durch 
eine oder mehrere Ringlampen, einem Durchlichtmodul zur Aufhellung der Innenflachen und Rander von 
ObjektdurchbrOchen, und einem Reflexionslichtmodul zur gleichmaBigen, reflektorischen HellfeU-Beleuchtung 
von ebenen oder schwach gekrOmmten Oberflachen, bestehend aus einem Beleuchiungsarray mit Fresnel-Unse 
und emem TeilerepiegeL 

Im gleichen Aufsatz wurde ein weiteres Beleuchtungssystem vorgeschlagen, das mit Hilfe eines zweidimensio- 
naJ abgelenkten und in seiner Intensitat elektrisch modulierten Halbleiterlasers wahrend der Belichtungszeit 
ernes einzelnenKamerabildes beliebig positionierbare Punkt- Cluster-, Linien- und Rachenlichtquellen erzeugt 
dienutjedemBildwechselverandertwerdenkdnneii. 

Merkmale mit anisotropen Streu- und Reflektionseigenschaften, wie Kanten oder Kratzer, liefern nur dann 
einen maxunalen Bildkontrast, wenn sie aus einem kleinen Raumsektor beleuchtet und betrachtet werden, der 
sich je nach Orientierung der Merkmale findert Des weiteren mufi beleuchtungstechnisch der gesamte Raum- 
winkel verfQgbar sem, weil ansoosten nicht sfimtliche Merkmale oder Fehler optimal beleuchtet werden kdnnen. 

Beide genannten Beleuchtungssysteme genOgend daher noch nicht den Anforderungen, die an em Inspek- 
tionssystem gestellt werden, das mit hohen Taktraten an standig wechselnden Objekttypen und Objcktorientie- 
nmgen unterschiedliche Fehlertypen mit maximalem {Contrast detektieren und klassifizieren soil 

Auf gabe der Erfindung 

Der Erfindung Hegt die Aufgabe zugrunde, ein Verfahren und erne Vorrichtung der genannten Gattung zu 
cV^l 1 ^™ 1 Objekten, wie Metallteilen, Keramikscheibcn, Blechen, Halbleiter-Chips, Hybridbausteinen, 
SMD-Schaltungen, Dichtungen eta Merkmale und Defekte der Oberflache, wie Kanten, Texturen, Knicke, 
Farbnecke, matte Stellen, Welhgkeiten, Risse u. a. m. mit hoher Zuveriassigkeit und Geschwindigkeit detektiert 
und klassifiziert werden kdnnen. 

Dars tellung der Erfindung und deren Vorteile 

Die Ldsung der Aufgabe besteht in den Merkmalen des Anspruchs I. Weitere Ausgestaltungen des erfin- 
dungsgemaCen Verfahrens sind in den UnteransprOchen; eine erfindungsgemaBe Vorrichtung in Anspruch 6 
gekcnnzetchneu 

Das eifindungsgemaBe Verfahren weist den Vorteil auf.daB mit diesem Merkmale und Defekte der Oberfla. 
cbe eines Objektes. wic Kanten, Texturen, Knicke, Farbflecke, matte Stelien. Welligkeiten, Risse aa m, mil 
maximal mdglichem Signal-Rauschverhaltnis bzw.mit maximalem Kontrast detektiert und unabhangig von der 
jeweiligen Bildumgebung pixelweise, d h. fur jeden Oberflachenpunkt getrennt, klassifizien werden kdnnen 
weil die erhaltene Information jeweils in der zeitlichen Grauwertsequenz enthalten isl Durch die vollstindige 
Bereitstellung aller Beleuchtungswinkef wird in vorteilhafter Weise erreicht daB die Merkmale mit OptimalFil- 
tern bzw. Matched -Filiern extrahiert werden kdnnen. 

Bei ring-, sektor- oder ringsektorfdrmigen Verteilungen der Beleuchiungsf unktionen und wenn als Merkmals- 
analyse eine Fourier- oder ahnliche Transformation verwendet wird, wird vorteilhaft eine rotationsinvarante 
Klassifizierung der Merkmale erhalten Mit einem Auswerteprogramm kann dann das Ergebnis der DFTOpcra- 
uon graphisch dargestellt werden und die unterschiedlichen Fehlerklassen in n-periodische (Di>D 2 ) oder 
^-penodische (D, < D2) oder ntehtperiodische mit geringen Anderungen in der Grauwertsequenz (groBes D* 
kleines D, + D 2 ) oder durchgehende dunkle (alle Spekiralwerte gering) Grauwenscquenzen unterschieden 
werden, 

Streut die Oberflache isotrop.dann sind zur roiationsinvaranten Klassifizierung gerichteter Merkmale kre'is- 
symmetnsche Belcuchtungssequenzcn (Fig. 2) zweckmaQig. 1st jedoch die Obcrflachenstruktur, zum Betspiel 
durch genchtete Bearbeitung, wie Schleifen. nicht mehr rotationssymmetrisch, dann kann zur optimalen Signal- 
trennung von Oberflachen und gesuchtem Merkmal der Emsatz von elltpuschen Belcuchtungsfunktioncn vor- 
teilhaft sein. Dabet muB die Strukturorientierung zur Ausrichtung der Ellipsen-Hauptachsen bekannt sein, was 
vorher mit Testbeleuchtungsfunktionen bestimmt werden kana 

In vorteilhafter Weise kdnnen die einzelnen Lichtquellen innerhalb des Beleuchtungshimmels. (der vorzugs- 
weise kugelWrmig 1st und auf dem sich betiebige Punkt-. Unicn- oder Flachenlichtquellen befinden kdnnen). 
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durch Far blichtquellen ersetzt sein, vorzugsweise durch drei Farblichtquellen grOn, rot und blau. Auf dicse Weise 
kann der Aufwand der Bildaufnahme mindestens um den Faktor 3 reduziert werden, weil ein Farbbtld einer 
Sequenz von mindestens drei GraubiWem entspricht 

Zur DurchfQhrung des Verfahrens wird vorteilhafterweise der Nullpunkt des Beleuchtungskoordinatensy- 
sterns in diejenige Punktlichtquelle gelegt, die Ober die als Spiegel gedachte Objektebene in die Kameraquclle 
abgebildet wird und damit zum Helffeld fOhrt Klemere Verkippungen der Objektebene k6nnen durch eine 
relative Translation der Beleuchtungskonfiguration rait geringem Aufwand korrigiert werden, da die Beleuch- 
tungsanordnung kartesisch und damit translationsinvariant ist 

Zurii Verstandnis des Verfahrens ist die Betrachtung der verallgemeinerten Beleuchtungs-Bikimatrix I(x,y4<p) 
hilfreich, die den Zusammenhang zwischen der Leuchtdichtematrix Lfap) und der Bildmatrix B(x,y) beschreibt 
und die gesamte fotometrische Information fiber das Objekt entbalt die mit der erfinderischen Vorrichtung 
ttberhaupt gewonnen werden kann. Das Beleuchtungsarray erlaubt es, den 4-dimensionalen Beleuchtungs-Bild- 
raum l{x#J&) in einer diskreten Form l(x,y,ij)zu erzeugen. lichtpunkt fQr Lichtpunkt wird angesteuert und das 
jeweils entstehehde Bild in den Bildspeicher abgelegt Mit einer Benutzeroberflache kennen verschiedene 
Projektionen oder Schnittebenen dieses 4-dimensionalen Datenraums betrachtet werden. 

Fur die pixehveise Untersuchung der ObjektoberflSche eines Objektes spielt die lokale, d. h. fQr feste x- und 
y-Koordinaten gewonnene Streu-, Reflektions- und Schattencharakteristik eine entscheidende Rolle. Ein matter 
Reck, der die Streukeule verbreitert, hat eine gleichmaBige Streucharakteristik ohne bevorzugte Richtung 
Osotrope Streucharakteristik). Punkte eines richtungsabhangigen Oberflachenmerkmals zeichnen sich durch 
eine amsotrope Streucharakteristik aus und unterscheiden sich von solchen mit isotroper StreucharakterisUk, 
Beispielsweise streut ein Oberflachenpunkt, der zu einem gerichteteo Oberflachenmerkmal gehdrt (Kratzer 
oder Kante) vornehmHch das Licht in die Video kamera, das senkrecht zu seiner Orientierung eintrifft Ein Punkt 
der die Neigung der reflektierenden Oberflache verandert, bevorzugt Streulicht aus einem bestimmten Sektor 
der Leuchtdichtematrix. Bei einem Fehlerpunkt mit verkippter spiegetnder Oberflache erzeugt ein einziger 
Lichtpunkt des Beleuchtungshimmels einen hellen Grauwert in der Videokamera. 

Durch das erfindungsgemafie Verfahren kftnnen nun Bilder mit mdglichst geringer Redundanz und maxima- 
lem Aussagewert erzeugt werden. Dabei eignen sich im einfachsten Fall Hellfeld- und Dunkelfeldbeleuchtung 
als Konzepte zur Extraktion der Oberflachenmerkmale, wobei diejenige Beteuchtungsfunktion gewahlt wird, die 
einen Maximalkontrast fflr die Fehlerquelle liefert En optimales Beleuchtungsfilter wird erhalten, indem die 
Streucharakteristik als Beleuchtungsfunktion aufgefaflt wird So ist beispielsweise die HeUfeldbeleuchtung mit 
einer Punktquelle ein Optimalfilter far einen idealspiegelnden Oberflachenpunkt, bei dem das Grauwerteergeb- 
nis einer Kamera maximal ausfallt, bei jeder anderen Oberflachenstruktur hingegen absinkt Bei Oberflachen- 
punkten mit stark anisotrop streuenden Eigenschaften, wie Kratzer oder Kanten, die in der Regel mit verschie- 
denen Orientierungen auftreten, wird aus einer Richtung senkrecht zur Orientierung des Objektmerkmais 
beleuchtet, so daB das Helligkeitssignal in der Kamera deutlich starker ist, aJs bei einer Beleuchtung aus anderen 
Rkrhtungen. Wegen der Richtungsabhangigkeit der Streucharakteristik ist somit ein optimales Beleuchtungsfil- 
ter nur m der Lage, anisotrop steuernde Merkmale in einer bestimmten Richtung zu detektieren. Deshalb 
werden in diesem Fall Beleuchtungssequenzen aus einer Vielzahl von Raum winkeln eingesetzt Dazu wird die 
Leuchtdichtematrix in Sektoren aufgeteilt die nacheinander angesteuert werden. Dadurch werden rotationsin- 
variame bz w. von der Orientierung des Objektes unabhangige Ergebnisse erhalten, weil zwischen verschiedenen 
Arten von Streucharakteristiken unterschieden werden kann. 

Wird als Vorrichtung zur Bildung des kuppelfdrmigen Beleuchtungshimmels ein Hohlspiegel, insbesondere 
Parabolspiegel. verwendet so besitzt dieser den Vorteil, daB aufgrund der Abbildungsgesetze die vom Parabol- 
spiegel mehr oder weniger horizontal reflektierten Lichistrahlen, wie fQr eine ortsunabhangige Streuung gefor- 
dert, in Richtung zum Brennpunkt und zum Objekt parallel oder mehr oder weniger parallel verlaufen, so daB 
der virtuelle Absiand der diffus beleuchtenden Uchtquellen vom Objekt sehr groB i$i und in erster Naherung als 
praktisch unendlich gelten kann. Das mehr oder weniger vertikal auf das Objekt einfallende Strahlenbundel ist 
hingegen konvergeht so daB die Lichtquellen uber die als spiegelnde Ebene gedachte Objektoberflache in die 
Ebene der Kamerapupille abgebildet werden. Damit kdnnen (wie beim eigens daftlr realisierten Reflektions- 
Uchimodul) spiegelnde Oberflachen gleichmaBig im Hellfeld beleuchtet werden. Zu dieser speziellen Anpassung 
kann der virtuelle Abstand der Lichtquellen variiert werden: Der Absiand der unteren Lichtquellen. wie 
LED- Arrays, vom Parabolspiegel ist entscheidend fflr die Strahlenformation, die auf das Objekt im Brennpunkt 
auftnit, ob es sich also um konvergemes. divergemes oder parallels Licht handelt, weshalb der Abstand 
yoneilhaft variabel ist Der geometrische Ort der Punktlichtquelle, die im Brennpunkt paralleles Lichi erzeugt, 
ist em Paraboloid oder ahnlich geformt Konvergentes bzw. divergemes Licht wird dann im Brennpunkt erzeugt 
wenn sich die Lichtquelle unterhalb bzw. oberhalb des geometrischen Ortes befindet; paralleles Licht zum 
Brennpunkt wird erzeugt wenn die Lichtquelle sich auf diesem geometrischen Ort befindet 

Ein weiterer Vorteil besteht darin, daB die Vorrichtung auBerst kompakt ist Der Hohlspiegel kann des 
weiteren vorzugsweise einstQckig aus transparentem Glas oder Kunststoff ohne Aussparung bestehen und in 
seinem obersten Bereich unverspiegelt sein zur Bildung einer Durchtrittsdffnung fttr das der reflektorischen 
Beleuchtung dienende Licht der Beleuchtungseinrichtung. 

Kurzbeschreibung der Zeichnung 

Es zeigt 

Fig. 1 einen schematischen Querschnitt durch eine Beleuchtungsvorrichtung zur DurchfQhrung des erfin- 
dungsgemaBen Verfahrens an einem Beleuchtungshimmel in Form einer Halbkugel und 
Fig. 2 eine Draufsicht auf den Beleuchtungshimmel zur Darstellung der verschiedenen anwahlbaren Sektoren. 
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in denen sich jeweils erne oder eine Mehrzah) von Lichtquellen befinden kCnnen 
Fig. 3 einen Algorithms eines Fl uBdiagramms f Or Pixel- Klassifikation mit (N + 2) Beleuchtungen 
Fig. 4 einen schematischen Querschnitt durch eine Beleuchtungsvornchuing bestehend aus einem zweidimen- 

sional gekrOmmten Beleuchtungshtmmel mit einer Beleuchtungsanordnung und 
5 Fig* 5 eine wehere Beleuchtungsvorrichtung mit zweidimensional gekrOmmt Beleuchtungshimmel und einer 

gestaJteriscb abweichenden Beleuchtungsanordnung und Objektzufflbning. 

Ausf Qhrung der Erfindung 

10 Ober eine Basis B (Fig, 1) walbt sich ein halbkugelfdrroiger Beleuchtungshimmel in welchem eine Vielzah] voo 
Lichtquellen 2 angeordnet sind, vorzugsweise in verschiedene Sektoren gemfiB der Fig. 2 aufgeteilt, wobei 
die LichtqueDen in ihrer Imensitflt etnzeln freiprogrammierbar sind. Des wetteren befmdet sich im Beleuchtungs- 
himme) ein Beleuchtungsmodul, welches eine Mehrzahl von Lichtquellen 4 aufweist, die vorzugsweise als 
kartestsches Array angeordnet sind Vor dem Beleuchtungsmodul 3 befmdet sich eine Optik 5, die das von einer 

\$ eiarigen oder von wenigen Lichtquellen 4 ausgesandte licht dergestalt bttndelt, dad es zur gleichmaBigen 
HeWddausleuchtung ebener, reflektierender Oberflicben 1 geeignet ist Das Beleuchtungsmodul 3 dient insbe* 
sondere fOr die Weliigkeit- und KnickprOf ung an reflektierenden Oberflftchen und somit zur Klassifizierung von 
Oberfl&cbenneigungea Die lichtquellen 2 dienen zur diffusen Beleuchtung. 
Das von den Lichtquellen 2 und 4 auf das Objekt 1 geworfene und von diesem gestreute und reflekUerte Ucht 

20 wird von einem Objekttv 6 einer Videokamera aufgef angen und auf eine CCD-Matrix der Vldeokamera geleitet; 
die CCD-Matrix 7 ist an eine Bildspetchereinrichtung 9 angeschlossen, welche die Graubildfolgen speichert 
Nach Abspetchern einer bestimmtea vorgebbaren Anzahl von Bildern bzw. Farbbitdern innerhalb einer Bild- 
speichereinrichtung 9 der Videokamera werden die Bildinhalte bezOglich der Beieuchtungskoordinaten einer 
Fouriertransformatioa vorzugsweise eine 2D-Fouriertransformatioa unterworfen, urn Bet rag und Phase der 

25 Beteuchtungswinkelabh&ngigkeit des einzelnen Bildpunktes zu besummea 

Diese Klassifikationsmethode baut auf den prinzipieUen Eigenheiten der Grauwertsequenz auf, die bei Durch- 
laufen der sektorieUen Beleuchtungen erhahen werdea Die Grauwertsequenz wird als endlicher Ausschnitt 
einer periodischen, zeit- und wertdiskreten Funktion angesehea die in ihre Basiskomponenten zeriegt werden 
kann; Betrag und Phase der Komponenten werden durch diskrete Fouriertransformation (DFT) der Anzahl N 

30 Grauwerte der Sequenz erhalten. 

Die Sektorzah) N soli dabei fflr die Fouriertransformation eine Potenz von 2 sein und hangt gemSB dem 
Abtasttheorem von der Periode der kompliziertesten relevanten Streucharakteristik ab: 

N Sfc2x2a/T ra i n 

35 

Hat man es mit n-periodischen Phdnomenen zu tua muB mit mindestens vier Sektoren beleuchtet werden. FOr 
N -4 kOnnen somit beispielsweise die Grauwertsequenzen durch Beleuchtung aus vier Raumsektoren gewon- 
nen und anschlieBend einer Fouriertransformation unterzogen werdea Die Ergebnisse dieses Vorgangs fur drei 
Fehlerklassen sind nachfolgend dargestellt und lassen sich wie folgt beschreiben : 

40 

(A) Die Grauwertsequenz eines Kratzers ist n-periodisch (2 Maxima), da das Ucht aus 2 senkrecht zu seiner 
Oriemierung liegenden Beleuchtungssektoren in die Kamera gestreut wird Das Betragsspektrum weist 
eine groBe 2. Komponente auf, die Phase der 2. Komponente o 2 gibt die Orientierungsrichtung des Merk- 
malsaa 

45 (B) Die Grauwertsequenzen eines Punktes ist 2n-periodisch« da er das Licht aus einem bestimmten Beleuch- 
tungssektor in die Kamera streuL Das Betragsspektrum hat eine groBe 1 . Komponente. 
(Q Ein isotrop streuendes Objektmaterial (Spiegel, Fleck) hat eine konstanie Grauwertsequenz. Sein 
Betragsspektrum besteht nur aus einem Gleichantcilder ein MaB fur die Streuintenskat darstellu 

so Nachfolgend ist eine Spektralanalyse dreier exemplarischer Grauwertsequenzen gezeigt. wobei die horizon* 
tale Koordmate den azimutalen Beleuchtungswinkel beschreibt 
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n-periodtech: 
(Kratzer, Kante) 



B 

2*-periodisch: 
(Punkl t Krater) 



konstant: 
(Fleck, Spiegel) 



Grauwerte.l *777 H> m7T7TV '7777 1> 

0x/2x Zn/2 2x Ok/2* 3*/2 2s 0 k/2 n 3r/2 2k 



Helligkeitsfki. 



t — r 

O k/2 k 3k/2 2k 0 r/2 x 3k/2 2k 



Gleichantea: 



t 



t — i — r 

0 k/2 k 3k/2 2k 



-1 1 

On/2 k 3k/2 2k 0 k/2 k 3x/2 2 k 



I 11 l > 

0 k/2 x 3n/2 2k 

1 . . . I > 
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15 



LKomp.; 



■H 1 1 1 — > 

6 k/2 k 3k/2 2k 




0 k/2 k 3k/2 2i 



H 1 1 I — > 



0 k/2 k 3x/2 2k 
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2 Komp: ^ ^Ayy^A 



Betragsspekt 



Lp^_ 



0 1 2 



0 1 2 



0 1 2 
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Mit Hilfc der Foiiriertransformation kann nun ein Oberflachenpunkt bzw. ein Pixel des Bildes der Videokame- 
ra klassifiziert werden. wobei nachfolgend ein erfindungsgemaDer mdglicher Algorithms in Form eines FluB- 
diagramms fur die schneHe hierarchische Klassifizierung in beispielsweise vier idealisierte Fehlerklassen. wie 
Spiegel Punku Kratzer und Reck, gezeigt sind Ein unversehrter Punkt der Oberfiache (Spiegel-Punkt) kann 40 
sofort ausgesondert werden, indem Hell- und Dunkelfeldbild mit m Betracht gezogen werden. In diesem Fall ist 
die Kla$$ifikaiion ohne die Fouriertransformation beendeL 
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Grauwertdaten des Beleuchtungsversuchs: 
N Sektoren-, Hellfe!d% DunkeHekJbeleuchtung 
= N+2 Bikter 

r 



ExtraRIere eine Grauwertsequenz 
d n (n=0.1 N+t) 






nein 


Fourier Transformation 
d„(n=0.1 N-1) -*D„ ^ (k-0.1,2) 








Spiegel 



Kratzer 
{Orientierung:0 2 > 



Punkl Fleck 



GemaD der Fig* 4 wolbt sich Ober ciner Ebenc 35 odcr Basis ein Beleuchtungshimmel. der vorzugsweise ein 
mnenverspiegelter Parabolspicgcl 11 odcr ein innenvcrspiegeher Spiegel mil eiwa paraboloidischer Form i$t 
Oder ftnnlich zweidimensiona! gekrOmmt ist und der, vorzugsweise im obersten Bereich der Wdlbung eine 
Offnung 12 zum Uchidurchtritt besitzt; diese Offnung kann auch aus einem unverspiegelten. transparenten 
Matenalfeld des Spiegels bestehen. 

Fflr wcntger genaue Merkmalsextraktionen kann der Beleuchtungshimmel halbkugelfdrmig, for beste Merk- 
malsextraktionen angepaOt zweidimensional gekrOmmt sein. 

Untcrhalb der Offnung 12 des Spiegels 1 1 befindet sich auf einem transparemen Trfiger 13 ein zu analysieren- 
des Objekt 10. 3 

Untcrhalb des Tragers 13 befindei sich auf der Ebene 35 eine Beleuchtungseinrichtung 14, die aus einer 
Mehrzanl von kartesischen Lichtquellenfeldern 15, 15', 15" bestehu wobei jedes LichiquelJenfeld eine Mehrzahl 
von einzelnen Lichtquellen 17, 17' aufwcist Die Lichtquellenfelder 15, 15', 15" sind vorzugsweise LED-Arrays, 
deren einzelne Lichtquellen 17, XT einzeln oder In Gruppen sequenuetl ansteuerbar sind Direkt oberhalb der 
UchtquellenfeUer 15. 15', 15" kann ein dieselben abdeckender Diffusor angeordnet sein, der ein Tiefpass ist und 
dazu dient, daQ die Lichtquellen ortskominuierlich sind, urn das Abiasttheorem zu erfullen. 

Die Beleuchtungseinrichtung oberhalb des Spiegels 11 und der Offnung 12 besteht aus wenigstens einer 
Renexions-Ltchtquelle 23 und ist vorzugsweise ebenfalls ein LEDArray, der eine Optik 25 zur reflekiorischen 
BelcuchtungdesObjektes(1Q)aus einem begrenzien Raumwinkel vorgeschaltet ist und vor der sich ebenfalls ein 
Diffusor 24 befinden kann. Die im Strahlengang der von der Beleuchtungseinrichtung 23 ausgesandten Licht- 
strahlen 32 benndhche Optik ist betspiebwetse eine Kollimationslinse 25, auf die ein Teilerspiegel 20 folgL 
Settlich des Teilerspiegels ist eine Videokamera 21 mit Bildspeichereinrichtung angeordnet die eine Optik-Blen- 
den-Einnchtung 22 aufweisen kann. Die Beleuchtungseinrichtung 23 und die Videokamera 21 sind dergestaN 
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aufeinander abgestimmt, daB die Konvergenz des lichtbflndels 32 gleich der Konvergenz des Beobachtunirs- 
Iichtb0ndels32'ist * 

Die Beleuchtungsemrichtiing 23 dient der mehr oder weniger vertikaJen Beleuchtung flacher, reflektierender 
Objekte, wobei das LichtstrahleobOndel 32 durcb die Kollimationsunse 25 und nach Passieren des Teilerspiegels 
20 sowie der Offnung 12 inoerhalb des Spiegels 1 1 als konvergentes Lichtbundel auf das Objekt ID auftrht, von 
dort reflektiert und durch den Teilerspiegel 20 auf die Vldeokamera 21 geworfen wird Die Beleuehtungseinrich- 
tung 23 arbeitet analog der in Pig. 1 beschriebenen Beleuehtungseinrichtung 3. 

Von den einzeJnen Lichtquellen 17. 17' der Lichtquellenfelder 13, 15*, 15" werden UchtbOndel 19 zum Spiegel 

1 1 gesandt. die von dort als parallele UchtbOndel W auf das Objekt 10 fallen, welches sich im Brennpunkt oder 
ungefohr im Brennpunkt des Spiegels 1 1 befindet Dtesc mehr oder weniger horizontal emfallenden LichtbQndel 
W werden gestreut und durch den Teilerspiegel 20 auf die Vldeokamera 21 gelenkt Von oben hingegen trifft auf 
das Objekt 10 konvergentes Licht ein. so daB die erfindungsgemaBe Vorrichtung die theoretischen Vorausset- 
zungen ffir das gletchzeitige Vorhandensein von horizontalen, parallelen Beleuchtungs-Lichtstrahlen und von 
vertikalen, konvergenten Beleuchtungs-Lichtstrahlen gleichermaBen erfullt 

Alternativ kann statt dem Kamerastrahlengang der Beleuchtungsstrahlengang abgeknickt verlaufen; alterna- 
te zur IJnse kann audi ein Spiegel zur Kollimanon vorhanden sein. Ebenso kdnnen die in Hellfeld gebrachten 
Objektoberfiachen sphirisch gekrOmmt sein, wenn die Kollimationsoptik entsprechend angepaBt ist 
. 5 ?"? , e j nc ab « ewandcltc Beleuehtungseinrichtung 26. bestehend aus einer Mehrzahl von kartesischen 
lUchtquellenfeldCT 28, 28'. die wie die Lichtquellenfelder der Fig. 4 aufgebaut sein konnen. Die Lichtquellenfelder 
28, 28* sind ebenfalls mit einern Diffusor 30 abgedeckt Die Beleuehtungseinrichtung 26 sowie der Diffusor 30 
weisen mitug je erne Ausspamng 29 bzw. 31 auf, durch die ein Objekttrtger 33 mit dem zu detektierenden 
Objekt 10 in vertikaler Richtung verschoben werden kann. Durch eine einfache Hahen- und Seitenverstellbar- 
kett kann somit das Objekt 10 bezflglich des Brennpunktes des Spiegels 11 vertikal und gegebenenfalU auch 
horizontal korngien werden. Ansonsten entspricht die Ausgestaltung des Spiegels 11 sowie der Beleuchtunirs- 
em richtung 23 und der Vldeokamera 21 derjenigen der Fig. t . 

Die GrdBe und Anzahl der optimal erforderlichen Sektoren hftngt von der Objektfunkuon mit der niedrigsten 
Halbwertsbreite ab. Die geeignete Sektorzahl kann gefunden werden, indem das Verhaltnis zwischen Merkmals- 
signal und Oberftochensignal Ober der Zahl der Sektoren aufgetragen wird Dabei zeigt sich nach einem steilen 
Anstieg meist erne rasche Sattigung; bereits mit 3 bis 8 Bildern lassen sich leistungsfehige Fehlererkennungen 
realisieren,die gegenOber statisch beleuchteten Einzelbildern von wesentlichem Vorteil sind 
Liste der Bezug$2eichen 

1 Objekt 

2 Lichtquellen 

3 Beleuchtungsmodul 

4 Lichtquellen 
SOptik 
60bjektiv 

7 CCD-Matrix 
80bjektebene 

9 Bildspetchereinrichtungder Video- Kamera 
10 Objekt 
If Spiegel 

12 Offnung 

1 3 transparenter Trager 

14 Beleuehtungseinrichtung 
15, 15', 15" ebene Lichtquellenf elder 
16 Bewegungsdoppelpfeil 

17, 17' einzetne Lichtquellen 

18 Diffusor 

19 LichtbQndel einer einzelnen Lichtquelle zum Spiegel 50 
19' vorn Spiegel reflektiertes Uchtbundel einer einzelnen Lichtquelle 

20 Teilerspiegel 

21 Vldeokamera mit Bildspeichereinrichtung 

22 Optik-BlendenEinrichtung 

23 Beleuehtungseinrichtung 

24 Diffusor 

25 Optik, z. Bw Kollimationslinse 

26 Beleuehtungseinrichtung 

27 Bewegungsdoppelpfeil 

28, 28* ebene Lichtquellenfelder 60 

29,31 Aussparungen 

30 Diffusor 

32 Lichtbundel 

32 / Bebbachtungslichtbtindel 

330bjekttrager 65 

34 Bewegungsdoppelpfeile 

35 Ebene 



to 



15 



20 



25 



30 



40 



45 
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Patentanspruche 

1. Verfahren zum beleuchtungsdynamischen Erkcnnen und Klassifizieren von Oberflachenmerkmalen und 
-drfektcn ernes Objektes (IX wobei die zu detektierende Oberflfiche mittels roehrerer Beleuchtuigsquellen 
5 (2, 3) beleuchiet wird. die eme unterschiedliche Positboierung im Raum haben und die Beleuchtungsquellen 
sequentiell das Objekt beleuchtet und das von der OberflSche in jedem Zeitpunkt jeweils diffus zurOckge- 
worfene oder reflektieite Licht mittels einer Videokaroera(7). die eine Bildspeichereinrichtung(9) aufwefct, 
als raiim-zeitHch verschiedene Bilder aufgenoramen werden. dadurch gekennzefchnet, daB das Objekt (1) 
von einem Beieuchmngshimmel umgeben ist, dessen flachige UchtqueHenanordnung (2) sich mit vorgebba- 

10 rer Winkel- und IntetiMtttsabstufung frei programmieren laBt, mittels dersclben eine variable Anzahl 
bdiebiger Uchtfunktionen erzeugt wird, die das Objekt nachemander beleuchtet und das Objekt zusfitzlich 
aua i emem begrenzten Raumwinkefbereich mit einer weiteren programmierbaren Lichtquelle (3) Qber eine 
KoUimauonsoptik so beleuchtet wird, daB fur aUe Punkte einer ebenen Objektoberflache die Reflexions- 
winkett>edjngung erfflllt wird und eine geeignet gewahltc Punktquelle Ober die als ebener Spiegel gedachte 

is Oberflache in die KamerapupiUe abgebUdet wird, und die entstehenden Bilder von der Videokamera (7) 
aufgenommen und in einer fii Wspeichereinrichtung (9) abgespeichert und die Grauwertfolgen des aufce- 
nommenen Bildstapels einer Merkmalsanalyse unterzogen werden. 

2 Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB die Bdeuchtungsfunktionen elliptische ring- 
sektor- oder nngsektorforrnige Verteilungen aufweisen und die Merkmalsanalyse eine Fourier- oder aJinli- 

20 che Transformation ist, die eine rotationsinvariante Klassifizierung der Merkmale bewirkt 

3. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB jede Lichtquelle innerhalb des Beleuchtungs- 
lummete aus einer Mehrzahl von getrennt ansteuerbaren Farblichtquellen, vorzugsweise grfla rot und blau, 
• ? i^^ eidtteitig * cln BUd mit v enchiedcnen uberlagerten Farben aufgenommen wird. wobei 
em Farbbild jeweils mindestens drei aufeinanderfolgende Graubi Ider ersetzt 

is 4. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB zur Kompensation oder Messung einer gering- 
fOgigen Verkippung der Objektebene der Nullpunkt des Beleuchtungskoordinatensystems in diejenige 
Punktlichtquelle gelegt wird, die Ober die als Spiegel gedachte Objektebene in die KamerapupiUe abgebil- 
det wird und danut zum HellfeldfOhrt e 
5. Verfahren nach Anspruch 1, dadurch gekennzeichnet, daB der Algorithmus der hierarchischen Fehterklas- 

30 sinkationmitFounertransformationwiefolgtist: 



35 



45 



60 
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Grauwertdaien des Beleuchtungsversuchs: 
N Sektoren-, Hellfeld-, DunkelfekJbeteuchtung 
= N+2Bilder 



txtrahiere etna Grauwertsequenz 
d n (n=0,1, N+1) 




Fourier transformation 
dn (n=0,t ,N-1) -f D K ^ <k=0,1 f 2) 




Spiegel 




Kratzer p un kt Fleck 

(Orientierung:0 2 ) 



y°7 l f d ; ll,n * ?um beleuchiungsdynamischen Erkcnnen und Klassinzieren von Oberflachenmerkmalen 
und defekien eines Objektes (1), wobei die zu detekuerende Obern&che miuels mchrcrer Beleuchtungs- 
que en (2, 3) beleuchtbar m. die eine unterschiedliche Positionierung im Raum haben und die Beleuchtungs- 
quellen sequential das Objekt beleuchten und das von der Oberflache in jedem Zeitpunki jeweils diffus 
zuruckgeworfene oder reflektierte Licht miuels einer Vldeokamera (7) und einer Bildspeichereinrichtung 
(9)als raunvzeulich verschiedene BiWer aufnehmbarist gekennzeichnet durch folgende Merkmale: 

a) em Beleuchtungshimmel (Kuppel) aus einer Vielzahl von frei programmierbaren Lichtquellen (2)l die 
zu beliebig geformten Beleuchtungsfunktionen zusammenfaObar sind, die zur stquemiellen Beleuch- 

- tung des Objektes aus vorgebbaren Raumwinkelbereichen dienea 

b) wenigstens eine programmierbare Lichtquellc (4) mil einer Linsen- oder Sptegeloptik (5) zur gleich- 
maOigen reflektorischen Hellfeld-Beleuchtung von ebenen oder schwach gekrummien OberfUchen. 

c) ein Aigonthmusgenerator, der die von der vldeokamera aufgenommenen Bild- bzw. Farbbildstapel 
einer Transformation zu unterwerfen imstande ist, womit bei geeigneter Wahl der Beleuchtungsfunk- 
lion die gesuchten OberfUlchenmerkmale und Fehlertypen mil maximalem Signal-Rausch-Abstand 
detektierbar und klassifizierbar sind. 

7. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet, daO die Beleuchtungsfunktionen aus einer Anzahl 
von Ringsektoren ($„„,) bestehen. dcren damit erzeugte Grauwertbildfolgen einer ID- oder 2D-Fourier- 
transformauon bezQglich der Beleuchtungskoordinaten bzw. der Ringsekiorindices in und n unterworfen 
werden, wobei miuels der erhaltenen Koefrtzienten eine rotationsinvarame Klassifizicrung der Merkmale 
durcngefuhrt wird 

a Vorrichtung nach Anspruch dadurch gekennzeichnei. daQ der Beleuchtungshimmel ein innen verspie- 
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gelter, konkav gekrflmmter Hohlspiegel (11) ist dcr in setnem obersten Bereich eine Ausspaning (12) 
auhveirt, oberhalb dersdben sich die zur reflektorischen Beleuchtung dienende Beleuchtungseiiirichtung 
(23) befindet und daB die zur diffusen Beleuchtung dienende Beleucbtungseinrichtung (14, 26) aus ebenen 
Ljchtquellenfeldern (13, 15'. 13"; 28, 28^ besteht, die sich unterhalb des Hohlspiegels befmden, wobei das 
Objekt (10) unterhalb der Aussparung (12) und ungefahr mittig innerhalb der ebenen Lichtquellenfelder 
innerhalb des Sammelpunktes bzw. der Sammdflftche des Hohlspiegels angeordnet ist 

9. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, daB der Hohlspiegel ein Parabobpieget (11) ist 
und sich das Objekt (10) im Brennpunkt bzw. ungefehr in nerhalbdesselben befindet ' 

10. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, daB der Hohlspiegel ein Kugelspiegel oder ein 
EUipsoidspiegel oder ein ahnlich gekrflmmter Spiegel ist und sich das Objekt (10) im Brenn- bzw. Mittel- 
punkt bzw, ungefahr innerhalb desselben befindet 

1 L Vorrichtung nach Anspruch 8, dadurch gekennzeichnet dafl die Lichtquellenfelder ebene LED- Arrays 
(15, 15', t5"; 28, 280 sind, die auf einer gememsamen Ebene (35) unterhalb des Hohlspiegels angeordnet und 
nut einem Dif fusor (18, 30) abgedeckt smd 

12. Vorrichtung nach Anspruch 8 oder 11, dadurch gekennzeichnet, daB zwischen den Lichtquelienfeldern 
(15, 15', 15'0 und dem Hohlspiegel (11) ein transparenter Triger (13) zum Ptazieren des Obiektes HO) 
angeordnet ist 9 y 9 

1 3. Afomchtung nach einem der vorherigen Ansprtiche, dadurch gekennzeichnet, daB die Beleuchtungsein- 
nchtungen (14, 23. 26). insbesondere die LED-Arrays(15, 13', 15'';28,28yrei programmierbar sind 

14. Vorrichtung nach einem der vorherigen AnsprOche, dadurch gekennzeichnet daB die zur reflektorischen 
Beleuchtung dienende Beleuchtungseinrichtung (23) aus einem LED-Array besteht, vor dem ein Diffusor 
X? n*l Aussparung (12) des Hohlspiegels (11) ein Teilerspiegel (20) angeordnet ist der das vom 
Objekt (10) reflektiert Licht auf die Videokamera (21) Icitet 

Hierzu 4 Seite(n) Zeichnungen 
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txtraniere eine Grauwertsequenz 
dn(n=0,1 N+1 






nein 


houner iranstormation 
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